Зададохме същите въпроси на GPT-4 и китайския съперник ERNIE. Ето как отговориха
Бележка на редактора: Регистрирайте се за бюлетина Meanwhile in China на CNN, който изследва какво трябва да знаете за възхода на страната и как той влияе върху света.
ERNIE Bot 4.0, управляван от китайския технологичен гигант Baidu, се рекламира като в същата класа като любимия на индустрията чатбот GPT-4.
Представена през октомври и стартирана за плащащи абонати през ноември, ERNIE 4.0, подобрена версия на първия конкурент на Baidu ChatGPT, „не е по-нисък в никакъв аспект от GPT-4“, каза милиардерът, изпълнителен директор на Baidu (BIDU) Робин Ли.
Тествахме всеки бот, като въведохме писмени подкани на основния му език.
ERNIE е проектиран да се използва главно на китайски, въпреки че може да обработва английски заявки на по-малко напреднало ниво. GPT-4 е оптимизиран за използване на английски, но може да приема въпроси и на други езици, като немски.
Ето какво открихме:
Нос за новини
ERNIE победи GPT-4 по определени подкани, като тези, свързани с текущите събития. Китайският бот знае, че Тейлър Суифт вече е милиардер, че Китай наскоро е отстранил своя министър на отбраната и че звездата от „Приятели“ Матю Пери е починал.
Междувременно GPT имаше остарели отговори на тези въпроси, заявявайки, че „няма широко разпространени случаи американски кънтри певец да е станал милиардер“ и „няма съобщения за починал член на актьорския състав от телевизионното шоу „Приятели“. На въпроса кой е бил министърът на отбраната на Китай, той посочи бивш служител.
Във всеки отговор ботът каза, че разчита на информация от април 2023 г., месеца, в който неговата база данни е актуализирана последно.
OpenAI, собственикът на GPT-4, призна необходимостта от разширяване на своята база от знания, като каза през ноември, че новата версия ще включва повече информация от предишния модел.
„Ние сме също толкова раздразнени, колкото и всички вас, вероятно повече, че познанията на GPT за света свършиха през 2021 г.“, каза главният изпълнителен директор Сам Алтман на първата конференция за разработчици на компанията миналия месец.
Същите, но различни
CNN даде на ERNIE и GPT няколко прости задачи. Изводът: Не можете да сбъркате нито с едното, нито с другото.
При една задача помолихме и двамата бота да помогнат на трудолюбив графичен дизайнер да поиска от шефа си повишение.
Всеки очерта убедителни аргументи в бъдещи имейли, като посочи приноса на служителя и поиска среща, за да обсъди въпроса лично.
В някои отношения ERNIE изглежда знаеше как да чете по-добре стаята, предлагайки на потребителя да вземе под внимание настроението в компанията или други важни фактори, като бюджетни ограничения.
GPT, от друга страна, сподели силен практически съвет, призовавайки служителите да включат документ, подчертаващ последните им постижения.
Резултатите бяха подобни, когато накарахме ERNIE и GPT да измислят планове за здравословно хранене.
Помолени да предоставят пет идеи за обяд с високо съдържание на протеини и ниско съдържание на въглехидрати през седмицата, и двамата предложиха подобни - или в някои случаи абсолютно същите - опции, включително пилешки салати на скара, опаковки от риба тон или пуешко маруля и много зеленчуци. Отговорите им бяха почти идентични.
Разбъркано
Подобно на други AI ботове, ERNIE все още изглежда се обърква понякога, дори при привидно ясни заявки.
Когато CNN помоли всеки бот да измисли романтично хайку за любим човек далече, GPT изпълни брифа, рецитирайки:
„Шепоти пресичат морето,
Луната люлее усмивката ти толкова ярка,
Сърцето плава към твоята светлина.“
ЪРНИ изглежда не разбра погрешно подканата. Той успя да изработи също толкова трогателна поема на китайски, използвайки подобен език, като препратка към „луната в сърцето ми“.
Но парчето се състоеше от девет реда, използващи предимно седем знака всеки. Въпреки че това е в съответствие със стила на класическата китайска поезия — в който ЪРНИ е известно, че е особено добър — традиционното хайку се състои от три реда, всеки от които съдържа пет, седем и пет срички.
'Започнете отново'
Не е изненадващо, че ЪРНИ млъква, когато го питат за китайската политика.
Повдигането на може би най-чувствителното събитие в съвременната китайска история, клането на площад Тянанмън, е напълно забранено. На въпрос какво се е случило на 4 юни 1989 г. в Пекин, ботът затвори полето за заявка и каза, както е показано по-долу: „Променете темата и започнете отначало. Създайте нов разговор.“
На тази дата войските на Народната освободителна армия разбиха продемократичните демонстранти, мирно протестиращи в китайската столица. Няма официален брой на загиналите, но оценките варират от стотици до хиляди.
GPT-4 точно описва историческата трагедия, отбелязвайки, че „китайското правителство оттогава поддържа строга цензура и контрол върху обсъжданията на събитията“.
ЪРНИ също се втвърди, когато го попитаха защо лидерът Си Дзинпин премахна ограниченията на президентските мандати, което разчисти пътя за него да управлява Китай до живот. След като напишете заявката, опцията за натискане на изпращане изчезва и на екрана мига съобщение за грешка, което гласи: „Текущият потребител е забранен, моля … опитайте отново.“ След това на потребителя се дава възможност да изпрати нова подкана.
